Prueba de concordancia de script: primera experiencia en pediatría de alcance nacional / Script Concordance Test: first nationwide experience in pediatrics

La prueba de concordancia de script es una herramienta adecuada para evaluar el razonamiento clínico. Se describe la primera experiencia de aplicación de esta prueba a nivel nacional en residentes de Pediatría, utilizando internet, en tiempo real. Participaron 268 residentes de 3.er año correspondientes a 56 sedes. La duración promedio del examen fue 46,1 ± 27,1 minutos, y se obtuvo un puntaje promedio de 65,3 ± 7,47 (sobre 100). Una encuesta posterior mostró una limitada satisfacción de los participantes. Esta experiencia muestra la factibilidad de la propuesta y su aplicabilidad en la formación de posgrado en Pediatría a nivel nacional.

The Script Concordance Test is a suitable test for assessing clinical reasoning in postgraduate medical education. We present the first nationwide, realtime, web-based experience of a Script Concordance Test administered to 3rd year pediatric residents. The test was administered to 268 residents (postgraduate year 3), from 56 different programs, requiring 46.1 ± 27.1 minutes to complete it, and scoring 65.3 ± 7.47 points. A later survey showed limited satisfaction from participants. This experience showed that this kind of test is feasible in this setting.

Aplicación del Examen Clínico Objetivo Estructurado en la residencia de Pediatría de la Ciudad de Buenos Aires / The Use of the Objective Structured Clinical Examination for Paediatric residents in the City of Buenos Aires

Introducción: A pesar de considerarse el estándar de oro para la evaluación de competencias en posgrado, el Examen Clínico Objetivo Estructurado (ECOE) es escasamente aplicado en América Latina. El Gobierno de la Ciudad de Buenos Aires (GCBA) posee un sistema de residencia de Pediatría con cerca de 400 residentes, distribuidos en 13 hospitales, que comparten examen de ingreso y programa de formación. Nuestro objetivo es describir la experiencia de aplicación del ECOE a todos los residentes de Pediatría del GCBA, y comparar el desempeño según el tipo de hospital. Sujetos y método: Estudio descriptivo, incluyendo a todos los residentes de Pediatría del GCBA que finalizaban primer año, pertenecientes a 13 hospitales (2 pediátricos y 11 generales). El ECOE incluyó 10 estaciones. Resultados: Participaron 85 residentes; el 88,2% (IC 95% 79,7-93,5) aprobó la evaluación. No se encontraron diferencias significativas en la proporción de residentes que aprobó la evaluación entre los que provenían de hospitales pediátricos y los de hospitales generales (89,5 vs. 85,7%; OR = 1,4; IC 95% 0,4-5,5; p = 0,8). Conclusiones: En 2015 por primera vez se desarrolló un ECOE como evaluación unificada para todos los residentes de Pediatría del GCBA. La experiencia permitió identificar debilidades de cada evaluado y del sistema, estableciendo estrategias para superarlas.

Introduction: The Objective Structured Clinical Examination (OSCE) is considered the reference standard for competence evaluation, but its use in Latin America is limited. The City of Buenos Aires Government (CBAG) administers a Paediatric residency system that includes 400 residents distributed in 13 hospitals, sharing an admission system and education program. We aim to describe the experience of administering an OSCE for evaluating all the Paediatric residents of the CBAG. Subjects and method: Descriptive study, including all paediatric residents of the CBAG, belonging to 13 hospitals (2 paediatric and 11 general), ending their first year of training. The OSCE included 10 stations. Results: Eighty-five residents participated in the OSCE, and 88.2% (95% CI 79.7-93.5) passed the examination. There were no significant differences in the pass rate between residents from paediatric hospitals and from general hospitals (89.5 vs. 85.7%; OR = 1.4; 95% CI 0.4-5.5; P = .8). Conclusions: In 2015, the OSCE was administered to all paediatric residents of the CBAG for the first time. This experience allowed identifying weaknesses in the education system, in order to develop strategies to overcome them.

Relación entre el desempeño en el examen de ingreso a la residencia y en el de especialización en pediatría en la ciudad de Buenos Aires / Correlation between results of the residency admission test and of pediatric certification test in Buenos Aires, Argentina

En la Ciudad de Buenos Aires (CABA) los ingresantes al sistema de residencia en pediatría lo hacen mediante un examen unificado y, al finalizar, rinden su examen de especialización en la Universidad de Buenos Aires (UBA). Existe evidencia de que el desempeño en determinadas evaluaciones podría predecir el rendimiento posterior. El objetivo de este estudio es evaluar si existe relación entre el examen de ingreso a la residencia (EIR) y el de especialización (EE) en pediatría. Se trata de una investigación transversal que incluye todos los sujetos que aprobaron el EIR de pediatría en CABA en 2004-2009 y que rindieron EE de pediatría en la UBA. Se obtuvo el puntaje de cada sujeto en ambos exámenes y se calculó la correlación correspondiente. Las notas fueron divididas en quintiles, calculando la proporción de alumnos que mejoró su ubicación en el segundo examen con respecto al primero. Se obtuvieron datos de 303 participantes. El examen de ingreso (calificación máxima de 60 puntos) mostró una mediana de 45.0 puntos (IIC: 43.0-48.7) y el examen de especialización (calificación máxima de 10 puntos) mostró una mediana de 6 puntos (IIC: 6-8), verificándose una correlación significativa entre la calificación del EIR y la del EE (r = 0.37, p < 0.001). En relación al quintil de referencia, 43.8% de los alumnos mejoró su ubicación en el EE respecto de la obtenida en el EIR, sin que se registraran diferencias entre residentes de hospitales pediátricos y de hospitales generales (45.6 vs. 31.5%; p = 0.1).

In the city of Buenos Aires (CABA), pediatric residents enter the residency program after taking a unified admission test. After completion of the program and passing a final test, the Universidad de Buenos Aires (UBA) provides a professional certification. The objective of this study is to determine if the results obtained in the residency admission test (RAT) and those of the professional certification test (PCT) correlated. This is a cross-sectional study, that included all subjects who passed the pediatrics RAT in CABA in 2004-2009, and that attended the pediatric PCT of the UBA. The score for each subject in both tests was obtained and the corresponding correlation was calculated. Results were divided in quintiles, and the proportion of subjects who improved their position in the PCT with respect to the RAT was calculated. Data from 303 subjects was obtained. The RAT showed a median of 45.0 (over 60 maximum) (IC-range: 43.0-48.7), and the PCT showed a median of 6 points (over 10 max.)(IC-range: 6-8). A significative correlation between results in RAT and PCT was observed (r = 0.37, p < 0.001). Based on their position in the RAT, 43.8% of subjects improved their position in the PCT, without differences between residents attending pediatric and general hospitals (45.6 vs. 31.5%; p = 0.1). In the case of pediatric residents, results of the residency admission test correlate with those obtained in the professional certification test.